eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0262    recall@10 : 0.0509    recall@20 : 0.0896    recall@50 : 0.1911    mrr@5 : (0.022+0j)    mrr@10 : (0.0271+0j)    mrr@20 : (0.0302+0j)    mrr@50 : (0.0339+0j)    ndcg@5 : (0.0192+0j)    ndcg@10 : (0.0273+0j)    ndcg@20 : (0.0374+0j)    ndcg@50 : (0.0589+0j)    hit@5 : 0.0407    hit@10 : 0.0795    hit@20 : 0.125    hit@50 : 0.249    precision@5 : 0.0091    precision@10 : 0.0088    precision@20 : 0.0074    precision@50 : 0.0065
Test result:
recall@5 : 0.0394    recall@10 : 0.065    recall@20 : 0.1085    recall@50 : 0.2021    mrr@5 : (0.0304+0j)    mrr@10 : (0.0348+0j)    mrr@20 : (0.0387+0j)    mrr@50 : (0.0421+0j)    ndcg@5 : (0.0285+0j)    ndcg@10 : (0.0361+0j)    ndcg@20 : (0.0473+0j)    ndcg@50 : (0.067+0j)    hit@5 : 0.0601    hit@10 : 0.095    hit@20 : 0.1492    hit@50 : 0.2558    precision@5 : 0.0132    precision@10 : 0.011    precision@20 : 0.0089    precision@50 : 0.0066

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0205    recall@10 : 0.0487    recall@20 : 0.0882    recall@50 : 0.1698    mrr@5 : (0.0192+0j)    mrr@10 : (0.024+0j)    mrr@20 : (0.0271+0j)    mrr@50 : (0.0301+0j)    ndcg@5 : (0.0166+0j)    ndcg@10 : (0.0256+0j)    ndcg@20 : (0.0356+0j)    ndcg@50 : (0.0527+0j)    hit@5 : 0.0359    hit@10 : 0.0727    hit@20 : 0.1192    hit@50 : 0.2161    precision@5 : 0.0083    precision@10 : 0.0085    precision@20 : 0.0073    precision@50 : 0.0057
Test result:
recall@5 : 0.0353    recall@10 : 0.0598    recall@20 : 0.1023    recall@50 : 0.1936    mrr@5 : (0.0269+0j)    mrr@10 : (0.0314+0j)    mrr@20 : (0.0351+0j)    mrr@50 : (0.0385+0j)    ndcg@5 : (0.026+0j)    ndcg@10 : (0.0334+0j)    ndcg@20 : (0.0443+0j)    ndcg@50 : (0.0637+0j)    hit@5 : 0.0523    hit@10 : 0.0882    hit@20 : 0.1424    hit@50 : 0.2471    precision@5 : 0.0118    precision@10 : 0.01    precision@20 : 0.0085    precision@50 : 0.0063

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0233    recall@10 : 0.0553    recall@20 : 0.0877    recall@50 : 0.1643    mrr@5 : (0.0192+0j)    mrr@10 : (0.0245+0j)    mrr@20 : (0.0274+0j)    mrr@50 : (0.0303+0j)    ndcg@5 : (0.017+0j)    ndcg@10 : (0.0272+0j)    ndcg@20 : (0.0357+0j)    ndcg@50 : (0.052+0j)    hit@5 : 0.0388    hit@10 : 0.0814    hit@20 : 0.1221    hit@50 : 0.2161    precision@5 : 0.0085    precision@10 : 0.0093    precision@20 : 0.0071    precision@50 : 0.0057
Test result:
recall@5 : 0.0336    recall@10 : 0.0565    recall@20 : 0.0987    recall@50 : 0.1942    mrr@5 : (0.0265+0j)    mrr@10 : (0.0311+0j)    mrr@20 : (0.0346+0j)    mrr@50 : (0.0381+0j)    ndcg@5 : (0.024+0j)    ndcg@10 : (0.0315+0j)    ndcg@20 : (0.0424+0j)    ndcg@50 : (0.0623+0j)    hit@5 : 0.0514    hit@10 : 0.0862    hit@20 : 0.1376    hit@50 : 0.2471    precision@5 : 0.0109    precision@10 : 0.0099    precision@20 : 0.0084    precision@50 : 0.0063

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.021    recall@10 : 0.0523    recall@20 : 0.0847    recall@50 : 0.1606    mrr@5 : (0.0183+0j)    mrr@10 : (0.0234+0j)    mrr@20 : (0.026+0j)    mrr@50 : (0.0289+0j)    ndcg@5 : (0.0166+0j)    ndcg@10 : (0.0264+0j)    ndcg@20 : (0.0347+0j)    ndcg@50 : (0.0509+0j)    hit@5 : 0.0368    hit@10 : 0.0766    hit@20 : 0.1172    hit@50 : 0.2064    precision@5 : 0.0083    precision@10 : 0.0087    precision@20 : 0.0068    precision@50 : 0.0053
Test result:
recall@5 : 0.031    recall@10 : 0.0502    recall@20 : 0.0892    recall@50 : 0.1562    mrr@5 : (0.0217+0j)    mrr@10 : (0.0255+0j)    mrr@20 : (0.0291+0j)    mrr@50 : (0.0316+0j)    ndcg@5 : (0.0215+0j)    ndcg@10 : (0.0277+0j)    ndcg@20 : (0.038+0j)    ndcg@50 : (0.0522+0j)    hit@5 : 0.0455    hit@10 : 0.0746    hit@20 : 0.125    hit@50 : 0.2035    precision@5 : 0.0097    precision@10 : 0.0083    precision@20 : 0.0072    precision@50 : 0.0051

